Lý Quảng có ba người con trai là Lý Đương Hộ, Lý Tiêu và Lý Cảm. Lý Đương Hộ và Lý Tiêu đều mất sớm, Lý Đương Hộ có một người con là Lý Lăng.

Không bao lâu sau khi Lý Quảng mất, Lý Cảm oán Vệ Thanh đã làm cho cha mình tự sát, bèn đánh Vệ Thanh bị thương. Ít lâu sau, Cảm theo Hán Vũ Đế đem quân lên đất Ung, tới cung Cam Tuyền đi săn, bị cháu Vệ Thanh là Hoắc Khứ Bệnh giết chết. Hán Vũ Đế không muốn làm lớn chuyện nên nói dối rằng Cảm bị nai húc chết.

Về sau Lý Lăng đem quân giao chiến với Hung Nô thất bại, bèn đầu hàng Hung Nô.[21] Hán Vũ Đế giết mẹ và vợ con của Lý Lăng. Từ đó nhà họ Lý sa sút. Đến đời Đông Hán, con cháu của Lý Quảng là Lý Quyết được nhận chức Đại tư mã. Nhà họ Lý sinh sống ở vùng Lũng Tây qua nhiều năm sau.

Năm 618, khi lập ra nhà Đường, Lý Uyên đã tự xưng mình là con cháu của Lý Quảng, nhưng không có bằng chứng chứng minh.